|
|
Machine Learning-Based Multimodal Data Processing and Mapping in Robotics
Ligocki, Adam ; Duchoň,, František (referee) ; Saska,, Martin (referee) ; Žalud, Luděk (advisor)
Disertace se zabývá aplikaci neuronových sítí pro detekci objektů na multimodální data v robotice. Celkem cílí na tři oblasti: tvorbu datasetu, zpracování multimodálních dat a trénování neuronových sítí. Nejdůležitější části práce je návrh metody pro tvorbu rozsáhlých anotovaných datasetů bez časové náročného lidského zásahu. Metoda používá neuronové sítě trénované na RGB obrázcích. Užitím dat z několika snímačů pro vytvoření modelu okolí a mapuje anotace z RGB obrázků na jinou datovou doménu jako jsou termální obrázky, či mračna bodů. Pomoci této metody autor vytvořil dataset několika set tisíc anotovaných obrázků a použil je pro trénink neuronové sítě, která následně překonala modely trénované na menších, lidmi anotovaných datasetech. Dále se autor v práci zabývá robustností detekce objektů v několika datových doménách za různých povětrnostních podmínek. Práce také popisuje kompletní řetězec zpracování multimodálních dat, které autor vytvořil během svého doktorského studia. To Zahrnuje vývoj unikátního senzorického zařízení, které je vybavené řadou snímačů běžně užívaných v robotice. Dále autor popisuje proces tvorby rozsáhlého, veřejně dostupného datasetu Brno Urban Dataset. Na závěr autor popisuje software, který vznikl během jeho studia a jak je tento software užit při zpracování dat v rámci jeho práce (Atlas Fusion a Robotic Template Library).
|
|
|
Multimodal Image Processing in Art Investigation
Blažek, Jan ; Zitová, Barbara (advisor) ; Sablatnig, Robert (referee) ; Tonazzini, Anna (referee)
A B S T R A C T title: Multimodal Image Processing in Art Investigation author: Jan Blažek department: Department of Image Processing, IITA of the CAS supervisor: RNDr. Barbara Zitová PhD., Institute of Information Theory and Automation supervisor's e-mail address: zitova@utia.cas.cz abstract: Art investigation and digital image processing demar- cate an interdisciplinary field of the presented thesis. Over the past 8 years we have published thirteen papers belonging to this field of research. This thesis presents the current state of the art and puts these papers into context. Our research is focused on modalities in the visible and near-infrared parts of the spectrum and affects vari- ous tasks of art investigation. For studying the spectral response of paint materials, we suggest a low-cost mobile multi-band acquisition system and a calibration method extended by a light source with an adjustable wavelength. We created the m3art database of the spectral responses of pigments, available for comparison and public use. The central point of our research is underdrawing detection and visual- ization. For this purpose we have developed: acquisition guidelines based on optical properties of the topmost non-transparent layer, a visualization technique for comparison of modalities, and a signal separation technique...
|
|
|
Machine Learning-Based Multimodal Data Processing and Mapping in Robotics
Ligocki, Adam ; Duchoň,, František (referee) ; Saska,, Martin (referee) ; Žalud, Luděk (advisor)
Disertace se zabývá aplikaci neuronových sítí pro detekci objektů na multimodální data v robotice. Celkem cílí na tři oblasti: tvorbu datasetu, zpracování multimodálních dat a trénování neuronových sítí. Nejdůležitější části práce je návrh metody pro tvorbu rozsáhlých anotovaných datasetů bez časové náročného lidského zásahu. Metoda používá neuronové sítě trénované na RGB obrázcích. Užitím dat z několika snímačů pro vytvoření modelu okolí a mapuje anotace z RGB obrázků na jinou datovou doménu jako jsou termální obrázky, či mračna bodů. Pomoci této metody autor vytvořil dataset několika set tisíc anotovaných obrázků a použil je pro trénink neuronové sítě, která následně překonala modely trénované na menších, lidmi anotovaných datasetech. Dále se autor v práci zabývá robustností detekce objektů v několika datových doménách za různých povětrnostních podmínek. Práce také popisuje kompletní řetězec zpracování multimodálních dat, které autor vytvořil během svého doktorského studia. To Zahrnuje vývoj unikátního senzorického zařízení, které je vybavené řadou snímačů běžně užívaných v robotice. Dále autor popisuje proces tvorby rozsáhlého, veřejně dostupného datasetu Brno Urban Dataset. Na závěr autor popisuje software, který vznikl během jeho studia a jak je tento software užit při zpracování dat v rámci jeho práce (Atlas Fusion a Robotic Template Library).
|
|
|
Multimodal Image Processing in Art Investigation
Blažek, Jan ; Zitová, Barbara (advisor)
A B S T R A C T title: Multimodal Image Processing in Art Investigation author: Jan Blažek department: Department of Image Processing, IITA of the CAS supervisor: RNDr. Barbara Zitová PhD., Institute of Information Theory and Automation supervisor's e-mail address: zitova@utia.cas.cz abstract: Art investigation and digital image processing demar- cate an interdisciplinary field of the presented thesis. Over the past 8 years we have published thirteen papers belonging to this field of research. This thesis presents the current state of the art and puts these papers into context. Our research is focused on modalities in the visible and near-infrared parts of the spectrum and affects vari- ous tasks of art investigation. For studying the spectral response of paint materials, we suggest a low-cost mobile multi-band acquisition system and a calibration method extended by a light source with an adjustable wavelength. We created the m3art database of the spectral responses of pigments, available for comparison and public use. The central point of our research is underdrawing detection and visual- ization. For this purpose we have developed: acquisition guidelines based on optical properties of the topmost non-transparent layer, a visualization technique for comparison of modalities, and a signal separation technique...
|
|
|
Multimodal Image Processing in Art Investigation
Blažek, Jan ; Zitová, Barbara (advisor) ; Sablatnig, Robert (referee) ; Tonazzini, Anna (referee)
A B S T R A C T title: Multimodal Image Processing in Art Investigation author: Jan Blažek department: Department of Image Processing, IITA of the CAS supervisor: RNDr. Barbara Zitová PhD., Institute of Information Theory and Automation supervisor's e-mail address: zitova@utia.cas.cz abstract: Art investigation and digital image processing demar- cate an interdisciplinary field of the presented thesis. Over the past 8 years we have published thirteen papers belonging to this field of research. This thesis presents the current state of the art and puts these papers into context. Our research is focused on modalities in the visible and near-infrared parts of the spectrum and affects vari- ous tasks of art investigation. For studying the spectral response of paint materials, we suggest a low-cost mobile multi-band acquisition system and a calibration method extended by a light source with an adjustable wavelength. We created the m3art database of the spectral responses of pigments, available for comparison and public use. The central point of our research is underdrawing detection and visual- ization. For this purpose we have developed: acquisition guidelines based on optical properties of the topmost non-transparent layer, a visualization technique for comparison of modalities, and a signal separation technique...
|
|
|
Multimodal Image Processing in Art Investigation
Blažek, Jan ; Zitová, Barbara (advisor)
A B S T R A C T title: Multimodal Image Processing in Art Investigation author: Jan Blažek department: Department of Image Processing, IITA of the CAS supervisor: RNDr. Barbara Zitová PhD., Institute of Information Theory and Automation supervisor's e-mail address: zitova@utia.cas.cz abstract: Art investigation and digital image processing demar- cate an interdisciplinary field of the presented thesis. Over the past 8 years we have published thirteen papers belonging to this field of research. This thesis presents the current state of the art and puts these papers into context. Our research is focused on modalities in the visible and near-infrared parts of the spectrum and affects vari- ous tasks of art investigation. For studying the spectral response of paint materials, we suggest a low-cost mobile multi-band acquisition system and a calibration method extended by a light source with an adjustable wavelength. We created the m3art database of the spectral responses of pigments, available for comparison and public use. The central point of our research is underdrawing detection and visual- ization. For this purpose we have developed: acquisition guidelines based on optical properties of the topmost non-transparent layer, a visualization technique for comparison of modalities, and a signal separation technique...
|
|
|
Methods for Localization of Image Differences in Different Modalities of Paintings
Fürbach, Radek ; Blažek, Jan (advisor) ; Křivánek, Jaroslav (referee)
The work focuses on the analysis of paintings to determine the painting techniques. Specifically, it focuses on the localization of the underdrawing by comparing images taken in the spectra with different penetration depth. Defines the problem associated with the capture of the compared images in different spectra. Specifies methods that determine the dependence between two parts of the spectrum (mainly RGB and IR) and based on the dependence approximates conversion between these two parts of the spectrum (Red spectral component projection, Colour intensity, Weighted average of spectral components, Table conversion, Linear regression, PCA analysis and Edge decomposition). Work also describes more general problems that complicate solving tasks, such as noise, non-uniform illumination and adding the same type of radiation. Problems at work are thoroughly analyzed. We design a Calculation of illumination parameters using a neural network, Approximation of illumination by blur, Polynomial approximation of illumination and TWMJ approximation of illumination for suppressing non-uniform illumination. Define methods Estimation by edge decomposition and Local least squares method solving adding the same type of radiation. In addition, we describe the Gaussian filter, the Averaging, Median filter, Conservative...
|
|
| |
guest ::
